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Die Erfindung betrifft ein Verfahren zur Darstellung bewegiicher Korper. 

Es ist in der T chnik und in der Medizin oftmals erforderiich, die optische Darstellung von Objekten mit 
zusatzlichen Informationen anzureichern oder verschiedene Darstellungen eines Gegenstandes miteinander 
zu kombinieren. 

So ist es beispielsweise bei der Durchfuhrung bestimmter Operationen am menschlichen Korper ublich und 
notwendig, preoperative Bilder mit intraoperativen Bildern zu vergleichen. Bei diesen Bildern kann es sich urn 
zweidimensionale Rontgenaufnahmen, Tomographien, Ultraschalldarstellungen oder Kernspintomographien 
handeln. 

Urn zwei solcher Darstellungen in Ubereinstimmung zu bringen ist es nun moglich, eine gewisse Anzahl 
anatomisch charakteristischer Punkte zu identifizieren und deren Koordinaten in den beiden Darstellungen fest- 
zustellen. Danach kann man die sechs Parameter einer Festkorpertransformation, namlich drei translatorische 
und drei rotatorische Parameter sowie gegebenenfalls einen Skalierungsfaktor berechnen. Damit ist es mog- 
lich, eine der beiden Darstellungen so zu drehen und zu verschieben, dad beide Bilder aus der selben Per- 
spective und im selben Matistab angezeigt werden konnen. Dieser Prozeft wird als "Matching" bezeichnet 

Die Identifikation der charakteristischen Punkte ist bei diesem Verfahren aufwendig und fehleranfallig. 
AuBerdem konnen damit stets nur zwei Einzelbilder ex post verglichen und dargestellt werden. 

Um nun das Matching zu vereinfachen wurde vorgeschlagen, am zu untersuchenden Objekt gewisse Mar- 
kierungen anzubringen, die in beiden Darstellungen sichtbar und leicht identifizierbar sind. Dies konnen Son- 
den aus einem passenden Material sein, deren Position auf Rontgenaufnahmen leicht feststellbar ist. Im Fall 
von optischen Darstellungen kann es sich um Farbmarkierungen auf der Hautoberflache handeln. Auch damit 
ist nur eine ex post Darstellung zweier Einzelbilder moglich. 

Um nun eine optische Darstellung eines Gegenstandes mit anderen Darstellungen, bei denen es sich wie 
oben erwahnten zweidimensionale Rontgenaufnahmen, Tomographien, Ultraschalldarstellungen oder Kern- 
spintomographien oder dgl. handeln kann, zu kombinieren, ist es im Prinzip moglich, zunachst ein dreidimen- 
sionales Modell der Oberflache des Korpers zu schaffen und abzuspeichern. Dieses Modell kann nun in der 
oben eriauterten Weise etwa mit den Daten einer Kernspintomographie gematcht werden. Danach ist es mog- 
lich, den Korper aus einer beliebigen Perspektive optisch darzustellen und gleichzeitig Daten aus der Tomo- 
graphic passend einzublenden. Die optische Darstellung wird dabei aus dem Modell errechnet 

Ein solches Verfahren ist sehr aufwendig, da sowohl ein grolier Speicherplatzbedarf besteht ais auch eine 
enorme Rechnerleistung erforderiich ist. Au&erdem ist auch hier keine Darstellung in Echtzeit moglich. 

Aus der AT-B 384 544 ist ein Verfahren zur Positionsbestimmung von Korperteilen bekannt. Dabei wird 
mittels Ultraschallsensoren die jeweilige Lage bestimmt, um die Gelenksbeweglichkeitfestzustellen. Es handelt 
sich dabei jedoch um ein rein rechnerisches Verfahren, das keine bildliche Darstellung eriaubt und deshalb 
unanschaulich ist. 

Der gleiche IMachteil trifft auch fur die in der DE-C 34 06 179 beschriebene Vorrichtung zu. 

Die US-A 4,197,855 beschreibt eine Vorrichtung zur Messung der Bewegung des menschlichen Unterkie- 
fers, bei der ein winkelformiger Permanentmagnet zur Bestimmung der raumlichen Position dient. Auch hier 
ist eine bildgebende Weiterverarbeitung nicht vorgesehen. 

Aus der DE-A 38 07 578 ist es bekannt, einzelne Punkte auf einem menschlichen Kopf mit Hilfe von Vide- 
okameras zu vermessen. Die zu vermessenden Punkte werden dabei gemeinsam mit am Kopf angebrachten 
Bezugspunkten in einem stehenden Bild aufgenommen und elektronisch erfadt. Eine optische Darstellung ist 
nicht einmal fur stehende Einzelbilder vorgesehen. Umso weniger ist eine Darstellung in Echtzeit nahegelegt. 

Aufgabe der Erfindung ist es, diese Nachteile zu vermeiden und ein Verfahren zu schaffen, das es in ein- 
facher Weise ermoglicht, optische Darstellungen in anschaulicher Weise mit anderen Daten zu kombinieren 
in ubersichtlicher Weise darzustellen. 

Bei erfindungsgemaden Verfahren ist vorgesehen, dafi eine optische Darstellung des Korpers und ein dem 
Korper zugeordnetes Datenfeld gleichzeitig oder alternate aus der selben Perspektive und im selben Ma&stab 
in Echtzeit dargestellt werden. Dies bedeutet, dak sich der Korper im Aufnahmebereich frei bewegen kann. 
Dabei wird er in Echtzeit - also gleichzeitig - auf einer Anzeige vorrichtung dargestellt. Ein gespeichertes Daten- 
feld wird mit der Bewegung des Korpers mitgefuhrt und kann ebenfalls dargestellt werden. Auf diese Weise 
wird ein groBes Mali an Anschaulichkeit erreicht. 

Vorzugsweise wird das erfindungsgemaHe Verfahren in folgenden Schritten durchgefuhrt 

- Bereitstellung eines optischen Abbildungssystems bestehend aus Kamera und Monitor; 

- Zuordnung eines raumlichen Datenfeldes zu dem in einer bestimmten Lage befindlichen Korper; 

- fortgesetzte Erfassung der raumlichen Position des Korpers; 

- fortgesetzte Berechnung einer Darstellung des Datenfeldes, die jeweils der Lage des Korpers entspricht; 

- gleichzeitige oder alternative Darstellung des optischen Bildes und des Datenfeldes am Monitor. 

Es ist moglich, da& als Datenfeld die Position anatomisch charakteristischer Punkte, eine Rontgentomo- 
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graphie, eine Kernspintomograhie, eine Ultraschalldarstellung oder dgl. verwendet wird. 

Die Position von anatomisch charakteristischen Punkten kann etwa durch einen 3D- Digitizerstylus, also 

einen Magnetgriffel, erfaBt w rden. Dabei wird mit der Spitze des Stylus der betreffende Punkt markiert und 

gleichzeitig durch Betatigung der Eingabetaste die Bestimmung der genauen Position ausgelost. Es ist War, 
5 daB dadurch nur an der Korperoberflache liegende Punkte markiert werden konnen. 

Wenn Punkte, die im Korperinneren liegen, wie zum Beispiel charakteristische Punkte von Knochen. als 

Datenpunkte herangezogen werden sollen t so kann man diese etwa durch stereophotometrische Vermessung 

auf Rontgenaufnahmen enmitteln. Ein Anwendungsfall hierfur ist die Vermessung von Gelenksbewegungen. 

Dabei werden zunachst zwei oder mehr Rontgenaufnahmen der entsprechenden GliedmaBe mit auf der Hau- 
10 toberflache angebrachten Sensoren hergestellt. Vorzugsweise sind die Bildebenen dieser Aufnahmen zuein- 

ander rechtwinkelig. dadurch ist es moglich, die Koordinaten von charakteristischen Punkten zu bestimmen. 
In einer bevorzugten Variante des Verfahrens ist vorgesehen, daB zur Erfassung der Lage des Korpers 

ein 3D-Sensor f vorzugsweise ein Magnet-Sensor, test mit dem Korper verbunden wird. Die laufende Ermittlung 

der Lage des Korpers ist damit in einfacher Weise moglich. 
15 Das Datenfeld braucht sich jedoch nicht auf die Position von Punkten des Korpers selbst zu beschranken. 

Als Datenfeld kann ein Rontgenbild verwendet werden, dessen Position zum Korper dadurch bestimmt wird, 

dad bei der Rdntgenaufnahme ein 3D-Sensor fest mit dem Korper und ein weiterer solcher Sensor mit der Ront- 

genkassette verbunden ist. Das gewohnliche zweidimensionale Rontgenbild wird einer Ebene auBerhalb des 

Korpers zugeordnet, z.B. der Ebene, in der sich bei der Aufnahme der Rontgenfilm befunden hat. Dieses Ront- 
20 genbild stellt dann das Datenfeld dar und es ist moglich, den Korper eines Patienten mit dessen Rontgenbild 

so darzustellen, als ob das Rontgenbild fest mit ihm verbunden ware. 

In analoger Weise kann auch als Datenfeld eine Ultraschalldarstellung verwendet werden, deren Position 

zum Korper dadurch bestimmt wird, daB bei der Beschallung ein 3D-Sensor, vorzugsweise ein Magnet-Sensor, 

fest mit dem Korper und ein weiterer solcher Sensor mit dem Ultraschallkopf verbunden ist. 
25 Bei einer bevorzugten Ausfuhrungsvariante der Erfindung ist vorgesehen, dak zur Erfassung der Lage des 

Korpers ein 3D-Sensor, vorzugsweise ein Magnet-Sensor, fest mit dem Korper verbunden wird. Ein solcher 

Sensor besteht aus einem kleinen Magneten, der nicht nur die Ermittlung seiner raumlichen Position, sondem 

auch die Bestimmung seiner Winkellage eriaubt. 

Es ist moglich, daB das optische Bild mit der Darstellung des Datenfeldes am Bildschirm uberlagert wird. 
30 Dabei ist es moglich, daB dieses Datenfeld in die optische Darstellung eingeblendet wird. Es ist jedoch auch 

moglich, daBzwischen optischer Darstellung und der Datendarstellung hin und her geschalten werden kann. 

Dem Anwender sind dadurch vielfaltige Moglichkeiten geboten, sich sowohl eine anschauliche Darstellung zu 

verschaffen, als auch eine optimale Grundlage fur eine exakte Vermessung von Korperteilen zu erhalten. 
Besonders gunstig ist es, wenn das optische Bild und die Darstellung des Datenfeldes am Bildschirm in 
35 unterschiedlichen Fenstem angezeigt werden. Diese Fenster konnen vom Benutzer in an sich bekannter Weise 

verschoben, ubereinandergelegt, gezoomt oder ausgeblendet werden. 

In einer besonders begunstigten Ausfuhrungsvariante des erfindungsgemaBen Verfahrens ist vorgesehen, 

daB ein Teil des darstellbaren Datenfeldes aus einer willkuriich wahlbaren gedachten Achse besteht und daB 

diese Achse durch folgende Schritte gewonnen wird: 
40 - Darstellung des Korpers als stehendes Bild in mindestens zwei Steilungen; 

- Bereitstellung der Moglichkeit durch den Benutzer das Bild der Achse in die stehenden Bilder einzuzeich- 
nen; 

- Berechnung der raumlichen Lage der Achse; 

- gemeinsame Darstellung der Achse mit dem in Echtzeit beweglich dargestellten Korper. 

45 Soil beispielsweise in das Bild eines menschlichen Oberschenkels die Achse des Femurs eingeblendet 

werden, so wird folgendermaBen vorgegangen: Zunachst wird der Lagesensor auf eine durch Weichteilbewe- 
gungen moglichstwenig beeinfluBte Hautpartie aufgeklebt. Dann werden mit der Videokamera Einzelbilder auf- 
genommen und gleichzeitig oder hintereinander am Bildschirm angezeigt. Durch den Lagesensor ist dabei die 
Position des Korperteil im Zeitpunkt der Aufnahme des Bildes bekannt. Der Benutzer kann dann etwa mit Hilfe 

so einer Maus in jedes Einzelbild eine Achse einzeichnen. Fur den Rechner stellt dies die Projektion einer im drei- 
dimensionalen Raum befindlichen Achse auf die Bildebene dar. Wenn diese Achse in zwei verschiedenen Dar- 
stellungen, beispielsweise in einer Vorderansicht und einer Seitenansicht erfolgt ist, kann damit die raumlich 
Position bestimmt werden. 

Es hat sich in diesem Zusammenhang als gunstig herausgestellt, wenn etwa vier Einzelbilder nebenein- 

55 ander in jeweils einem Fenster dargestellt werden. Der Benutzer jedes dieser Bilder zum Eintragen oder Andem 
der Achse benutzen. Sobald die raumliche Lage der Achse bestimmbar ist, wird diese auch fur die ubrigen Bil- 
der berechnet und angezeigt Somit ist eine genauo Kontrolle der Eingabe moglich. 

In gleicher Weise ist es moglich, daB ein Teil des darstellbaren Datenfeldes aus einem willkurlich wahlbaren 
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15 


20 


Koordinatensystem besteht, dessen Achsen in der oben definierten Art gewonnen werd n. Nach der raum- 
lichen FesUegung einer Achse eines orthogonalen Koordinatensystems braucht lediglich erne we.tere Achse 
in einem Bild eingetragen werdert. urn die Lage zu d finieren. 

Nach der Eingabe berechnet das Programm die Lage der Achse bzw. der Achsen in Bezug auf den Lage- 
5 sensor und ist damit in der Lage. in jede Darstellung des Korperteils diese Achse einzublenden, sodaB sich 
diese mit dem Korperteil mitbewegt. ^ 

Die eingeblendete Achse, bzw. das Koordinatensystem kann an sich schon das Datenfeld im Sinne der 
Erfindung darstellen oder zusatzlich zu einer Rontgentomographie o. dgl. angezeigt werden. 

Weiters betrifft die Erfindung eine Vorrichtung zur Darstellung beweglicher Korper. ErfindungsgemaB 
w besteht diese Vorrichtung aus: 

- einer Kamera; 

- einem Monitor, 

- einem Lagesensor, der mit dem darzustellenden Korper fest verbunden ist und die Bestimmung der 
jeweiligen Lage des Korpers ermoglicht; 

- Mitteln. die die gleichzeitige oder alternative Darstellung des optischen Bildes und des Datenfeldes am 
Monitor ermoglichen. 

Bei diesen letztgenannten Mitteln handelt es sich im allgemeinen urn einen Computer, der die erforder- 
lichen Berechnungen durchfuhrt Bei diesen Berechnungen ist der raumliche Abstand zwischen dem Brenn- 
punkt der Kameraoptik und dem Ausgangspunkt des fur den Lagesensor verwendeten Feldes. also etwa des 
von einem Magnetfeldemittor erzeugten magnetischen Feldes zu berucksichtigen. Weiters geht die relative 
Lage der Punkte des Datenfeldes in Bezug auf den Lagesensor in die Berechnung ein. An Stelle eines Com- 
puters kann jedoch auch ein entsprechend programmierter Mikroprozessor diese Berechnungen durchfuhren. 

Eine besonders einfache und leicht realisierbare Ausfuhrungsvariante der Erfindung ist dadurch gegeben, 
daB als Monitor der Bildschirm eines Personal Computers eingesetzt wird, wobei die Kamera am Videoeingang 
angeschlossen ist und das Datenfeld fiber den Personal Computer in einen weiten Eingang eingespielt w.rd. 
Dabei wird der aus der Aufnahme der optischen Bilder stammende Datenstrom vollstandig am Computer vor- 
beigelenkt und belastet dessen Verarbeitungskapazitat uberhaupt nicht. Dadurch steht die gesamte Rechen- 
leistung fur die zusatzliche Darstellung des Datenfeldes zur Verfugung. 

Im folgenden wird die Erfindung anhand eines in der Figur dargestellten AusfOhrungsbe.spieles naher 

30 crlsiutsrt. 

Eine Videokamera 1 ist fest mit einem Magnetfeldemittor 2 verbunden. Dieser Magnetfeldemittor 2 besteht 
im wesentlichen aus einer Spule, die an einen elektrischen Stromkreis angeschlossen ist und ein magnetisches 
Feld erzeugt Am Kopf 3 des Patienten ist ein Magnetsensor4 angebracht Dieser Magnetsensor besteht eben- 
falls aus Spulen. in denen durch das vom Magnetfeldemittor 2 erzeugte Feld Strome induziert werden. Durch 
Messung dieser Strome kann man die Position des Magnetsensors 4 auf etwa einen Millimeter genau bestim- 

me0 Mit einem Magnetgriffel 5 werden drei MeBpunkte A. B und C markiert. Auch im Magnetgriffel 5 sind wie 
beim Magnetsensor 4 Spulen zur Lageerkennung vorgesehen. Die Markierung erfolgt in derWe.se. daB die 
Spitze 6 des Griffels an den entsprechenden Punkt gebracht wird und dann eine Auslosetaste betatigt wird. 
Der Computer 7 speichert die momentane Position der Spitze 6 als Datenpunkt. Auf dem Monitor 8 des Com- 
puters 7 wird der Kopf 3 zusammen mit den Datenpunkten A. B und C dargestellt Dabei ist es moglich diese 
Datenpunkte auch dann darzustellen, wenn sie als reale Punkte nicht sichtbar waren. weil sie sich gerade auf 
der der Kamera abgewandten Seite des Kopfes befinden. Auch die Position andererverdeckter Punkte istdabe. 
darstellbar. So kann mit dem Griffel 5 die Position eine bestimmten Zahnes markiert werden. der dann auch 
bei geschlossenem Mund lokalisiert werden kann. Falls sich dieser Zahn auf der unteren Zahnre.he befindet. 
muB jedoch die Stellung des Unterkiefers zusatzlich erfaBt werden. Dies ist durch die Anbnngung eines nicht 
dargestellten weiteren Sensors moglich. 

Wenn an der Kamera 1 ein zusatzlicher Magnetsensor 9 angebracht ist, so kann eine starre Kopplung zwi- 
schen der Kamera 1 und dem Magnetfeldemittor 2 entfallen. Der Computer 7 berucksichtigt dann die vanable 
so Versetzung zwischen Kamera 1 und Magnetfeldemittor 2. 
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Verfahren zur Darstellung beweglicher Korper, bei dem eine optische Darstellung des Korpers und ein 
dem Korper zugeordnetes Datenfeld gleichzeitig oder alternativ aus der selben Perspektive und im selben 
MaBstab in Echtzeit dargestellt werden. 
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Verfahren zur Darstellung beweglicher Korper, bestehend aus folgenden Schritten: 

- Bereitstellung eines optischen Abbildungssystems bestehend aus Kamera und Monitor; 

- Zuordnung eines raumlichen Datenfeldes zu dem in einer bestimmten Lage befindlichen Korper; 

- fortgesetzte Erfassung der raumlichen Position des Korpers; 

- fortgesetzte Berechnung einer Darstellung des Datenfeldes, die jeweils der Lage des Korpers ent- 
spricht; 

- gleichzeitige oder alternative Darstellung des optischen Bildes und des Datenfeldes am Monitor. 

Verfahren zur Darstellung eines menschlichen odertierischen Korpers nach einem der Anspruche 1 oder 
2, dadurch gekennzeichnet, dafi als Datenfeld die Position anatomisch charakteristischer Punkte, eine 
Rontgentomographie, eine Kernspintomograhie, eine U I traschal I darstellung oder dgl. verwendet wird. 

Verfahren nach einem der Anspruche 1 bis 3, dadurch gekennzeichnet, dad zur Erfassung der Lage des 
Korpers ein 3D-Sensor, vorzugsweise ein Magnet-Sensor, fest mit dem Korper verbunden wird. 

Verfahren nach Anspruch 4, dadurch gekennzeichnet, daB als Datenfeld ein Rontgenbild verwendet wird, 
dessen Position zum Korper dadurch bestimmt wird, dad bei der Rontgenaufnahme ein 3D-Sensor fest 
mit dem Korper und ein weiterer solcher Sensor mit der Rontgenkassette verbunden ist. 

Verfahren nach Anspruch 4; dadurch gekennzeichnet, daB als Datenfeld eine Ultraschalidarsteliung ver- 
wendet wird, de-ren Position zum Korper dadurch bestimmt wird, daB bei der Beschallung ein 3D-Sensor, 
vorzugsweise ein Magnet-Sensor, fest mit dem Korper und ein weiterer solcher Sensor mit dem Ultra- 
schallkopf verbunden ist. 

Verfahren nach einem der Anspruche 1 bis 6, dadurch gekennzeichnet, daB das optische Bild mit der Dar- 
stellung des Datenfeldes am Bildschirm uberiagert wird. 

Verfahren nach einem der Anspruche 1 bis 6, dadurch gekennzeichnet, daB das optische Bild und die Dar- 
stellung des Datenfeldes am Bildschirm in unterschiedlichen Fenstern angezeigt werden. 

Verfahren nach einem der Anspruche 1 bis 8 t dadurch gekennzeichnet daB ein Teil des darstellbaren 
Datenfeldes aus einer willkurlich wahlbaren gedachten Achse besteht und daB diese Achse durch fol- 
gende Schritte gewonnen wird: 

- Darstellung des Korpers als stehendes Bild in mindestens zwei Stellungen; 

- Bereitstellung der Moglichkeit durch den Benutzer das Bild der Achse in die stehenden Bilder einzu- 
zeichnen; 

- Berechnung der raumlichen Lage der Achse; 

- gemeinsame Darstellung der Achse mit dem in Echtzeit beweglich dargestellten Korper. 

40 10. Verfahren nach Anspruch 9, dadurch gekennzeichnet, daB ein Teil des darstellbaren Datenfeldes aus ei- 
nem willkurlich wahlbaren Koordinatensystem besteht, dessen Achsen in der in Anspruch 9 definierten 
Art gewonnen werden. 

11. Vorrichtung zur Darstellung beweglicher Korper, bestehend aus: 
45 - einer Kamera (1); 

- einem Monitor (8); 

- einem Lagesensor (4), der mit dem darzustellenden Korper (3) fest verbunden ist und die Bestimmung 
der jeweiligen Lage des Korpers (3) ermoglicht; 

- Mitteln, die die gleichzeitige oder alternative Darstellung des optischen Bildes und des Datenfeldes 
so am Monitor (8) errnoglichen. 

12. Vorrichtung nach Anspruch 11, dadurch gekennzeichnet, daB als Monitor der Bildschirm eines Personal 
Computers (7) eingesetzt wird, wobei die Kamera (1) am Videoeingang angeschlossen ist und das Daten- 
feld uber den Personal Computer (7) in einen weiten Eingang eingespielt wird. 
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